4. Leaderboard'daki Filtreler ve Nasıl Kullanılmalı

MTEB leaderboard'u çeşitli filtreleme seçenekleri sunar. Bu filtreler, aday daraltma sürecinde sistematik kullanılmalıdır.

4.1 Görev Türü Filtresi

Leaderboard, belirli bir görev türüne (Retrieval, STS, Clustering vb.) göre filtrelenebilir. Bu filtre, spesifik bir kullanım senaryosu olan kullanıcılar için en kritik araçtır. Örneğin bir RAG pipeline'ı için yalnızca Retrieval alt sıralamasına odaklanmak, genel sıralamadan çok daha anlamlıdır.

4.2 Dil Filtresi

Çok dilli uygulamalar için belirli bir dil veya dil ailesi seçilebilir. Türkçe veri ile çalışan bir sistem için Multilingual sürümü ve Türkçe veri setlerini içeren görevler filtrelenmelidir.

4.3 Model Özellikleri Filtreleri

Model boyutu (parametre sayısı), embedding boyutu (vektör dimension), maksimum token uzunluğu (sequence length), açık kaynak vs. kapalı kaynak (proprietary) ve model tipi (bi-encoder, cross-encoder vb.) gibi parametreler üzerinden filtreleme yapılabilir. Bu filtreler, üretim ortamı kısıtlamalarına uygun adayları daraltmak için kullanılır.